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摘 要 : [目的 /意义 ] 针 对 当前 大 数据 时 代 下 应 急 信息 质量 

系 , 以 帮助 筛选 出 高 质量 的 应 和 急 信 息 。 [方法 “过 程 ] 基 于 大 数据 环境 下 应 急 信 
,的 需求 分 析 , 设 计 并 构建 大 数据 环境 下 的 应 急 信 ee ;并 且 利 用 云 模 型 对 EPS 数据 库 和 
息 进 行 和 案例 研究 。 [ 结 
息 质量 评估 工作 具有 一 定 作用 。 


质量 应 急 信 息 

EM - DAT 突 发 事件 数据 库 中 国内 的 应 急 信 ， 

该 评估 体系 对 指导 应 急 信 
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评估 体系 


管理 面临 的 新 挑战 ,提出 大 数据 环境 下 应 急 信 


息 质量 评估 体 
息 的 特征 以 及 在 应 急 管理 中 对 于 高 


结论 | 评估 结果 与 实际 情况 较为 相符 ,说 明 


(O 

CO 应 急 管理 关乎 民生 大 计 , 高 质量 的 应 急 信息 能 ; 
A 管理 提供 信息 支撑 。 但 大 数据 环境 下 ,应 急 信息 
的 原 量 存在 着 众多 的 挑战 :信息 噪声 的 产生 为 应 急 信 
ier rre motum. 
Ag. dca CU BH Rr CE ESER T 


定性 方法 进行 了 对 比 研究 。 宋 维 翔 等 ”指出 信息 质量 
的 指标 中 应 包括 权威 性 、 原创 性 .适量 性 等 。 王 仙 雅 
等 ”指出 信息 质量 的 指标 对 感知 有 用 性 和 持续 搜寻 行 
为 的 影响 主要 可 分 为 4 类 。 王 素 芳 等 “对 高 校 图 书馆 
言 息 共享 服务 质量 进行 评估 ,构建 了 包括 “实体 空间 ” 


困 铂 以 及 动态 性 、 及 时 性 的 要 求 ; 信 息 量 的 爆炸 式 发 展 
导向 了 信息 的 宛 余 、 重 复 等 。 大 数据 时 代 的 到 来 使 信 
A 
BER T SER M 管理 活动 也 对 应 急 信息 质量 提 
HERRER. e E 
eam oett. 应 急 信息 质量 评估 的 目的 在 于 剔除 低 质 


T 


“信息 控制 "和 “服务 效果 ”3 个 维度 .21 个 指标 的 评估 
指标 体系 。 

在 应 急 信息 质 量 研 究 方 面 ,相关 研究 多 为 对 应 
信息 质量 某 一 指标 和 应 急 信息 服务 质量 的 探讨 ,其 中 
朱 益 平等 ”提出 了 应 急 信息 的 数据 准确 性 测量 框架 
刘 春 年 等 “以 应 急 网 站 为 研究 对 象 ， 


量 的 .错误 的 信息 ,筛选 出 高 质量 的 、 符 合 应 急 决策 要 


息 服 务 质量 进行 了 评价 及 差异 发 现 。 袁 维 海 “指出 应 


求 的 应 急 信息 ,并 为 应 急 信 息 质 量 的 进一步 提升 与 治 


急 信息 质量 评价 在 应 急 信 息 筛 选中 发 挥 着 重要 的 作 


理 提供 可 靠 依 据 。 经 过 筛选 ` 质 量 有 所 提升 的 应 急 信 


用 ,并 且 构 建 了 应 急 信息 质量 评价 指标 体系 。 刘 春 年 


息 能 够 更 好 地 辅助 应 急 管 理工 作 。 此 外 ,大 数据 质量 
与 信息 质量 管理 与 评估 也 是 当今 研究 的 热点 ,因此 有 
必要 对 大 数据 环境 下 的 应 急 信 息 质 量 评估 进行 探讨 。 


1 文献 综述 


在 信息 质量 评估 的 相关 研究 中 , 查 先进 等 "指出 
了 信息 资源 质量 的 重要 性 ,并 且 阐 述 了 信息 资源 质量 
的 内 涵 和 外 延 ,构建 了 4 维度 16 Wl 
评估 指标 体系 ,对 信息 资源 质量 评估 的 定性 、 定 量 、: 


等 所 在 研究 中 发 现 缺 乏 评估 应 急 产 品 信息 可 靠 性 的 技 
术 是 寻求 应 急 产 品 信息 的 一 个 限制 。 已 有 学 者 从 不 同 
角度 对 大 数据 环境 下 的 应 急 信 息 进行 探索 , 且 研 究 多 
集中 于 如 何 对 其 进行 融合 利用 以 支持 决策 .实现 科学 
管理 。 郭 路 生 等 ” "探索 了 大 数据 环境 下 的 应 急 情报 
需求 的 开发 模式 和 要 素 ,并 利用 企业 架构 ( enterprise 
architecture ) 对 大 数据 环境 下 的 应 急 信 息 资 源 进 行规 
划 , 实 现 了 应 急 信 息 在 不 同 部 门 . 不 同系 统 之 间 的 共 
ERRER WERE T 针对 大 数据 背景 下 应 急 信 
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理 人 才 培 养 。 李 露 "” 从 多 
的 多 方面 、 


息 管 理 需求 探讨 了 应 急 管 
角度 指出 大 数据 环境 下 要 实现 对 应 急 信息 
多 层次 的 融合 。 

目前 国内 外 对 应 急 信息 质量 评估 理论 的 研究 较为 
薄弱 ,应 急 信息 质量 评估 理论 尚 需 进一步 完善 。 其 中 
表 维 海 ”认为 应 急 信息 质 量 评估 是 在 应 急 信息 管理 过 
程 中 对 应 急 信息 质量 进行 筛选 的 一 环 ,是 对 应 急 信 息 
管理 各 阶段 进行 信息 筛选 的 关键 。H.，Seppinen 等 
认为 及 时 人 性、 准确 性 是 应 急 信息 质量 的 重要 反映 。 学 
3f A. C. M. Oliveira 等 "提出 了 以 情境 评估 (scenario 
assessment) 的 方法 对 应 急 信息 的 质量 进行 评估 ,这 种 
评估 方案 为 决策 者 提供 了 在 不 确定 的 环境 下 理解 突 发 
事件 情况 的 模型 。 学 者 R，B，Steet 等 ' 总 结 了 灾害 
信息 管理 存在 的 主要 挑战 以 及 信息 质量 控制 机 制 与 应 
答 但 息 的 可 理解 性 ,倡导 人 们 加 强 对 信息 质量 在 灾害 
ee a 评估 方 

P 息 质量 的 评估 方法 。 在 评估 
B8 质量 标准 。 
e NIB 
EA ct E REGERE 4e P OSEE A cO DERE UR 
XENCT- E br B0 ELUCET , TELS DID SE RJ KC Ef 
让 十 信息 质量 实质 的 探讨 。 目 前 信息 质量 评估 指标 体 
系 研究 所 构建 的 指标 体系 ,大 都 借鉴 信息 质量 评估 的 
指标 ,对 应 急 信息 人 同时 ， 
在 起 数据 时 代 , 应 急 信息 环境 、 应 急 信息 特征 、 应 急 信 
EE adi 自 所 表现 出 的 
复 琵 维度 海量 A # 构 复杂 等 特性 ,都 有 必要 进行 更 深 
on BEERE RE 合 大 数据 环境 特点 的 应 急 
信息 质量 评估 指标 体系 。 

基于 以 上 发 现 ,本 文 在 研究 相关 理论 与 实践 的 基 
础 上 ,结合 大 数据 环境 下 应 急 信息 的 特征 与 实践 需求 ， 
提出 3 维度 8 指标 的 大 数据 环境 下 应 急 信 息 质 量 评估 
体系 ,而 后 本 文选 取 具 有 代表 性 的 EPS 数据 平台 与 
EM-DAT 突 发 事件 数据 库 , 随机 选取 其 中 9 类 应 急 信 
息 ,利用 评估 体系 与 云 模型 从 不 同 角度 对 两 个 数据 库 


进行 评 佑 分析, 为 提升 其 应 急 信 息 质 量 提供 评估 依据 。 


MERSER 
息 质量 评估 理论 阐释 


2.1 大 数据 环境 下 应 急 信 和 
2.1.1 | NE 
息 质 量 是 信息 质量 管理 的 关键 内 容 , 对 信息 资 


ies 


p 


源 质量 控制 发 挥 着 十 分 重要 的 作用 。 信 息 质量 评估 标 
准 是 评判 信息 质量 的 “标尺 ”,W. L. Yang 等 “从 信 
息 来 源 的 全 面 与 稳固 性 两 方面 ,提出 对 信 源 的 自动 评 
WEITE. S. Madnick 等 ”从 信息 的 可 再 生性 与 可 理 
解 性 角度 对 信息 进行 评估 。J M. Juran "从 信息 的 
需求 出 发 ,指出 信息 质量 评估 标准 应 是 根据 用 户 信息 
使 用 要 求 的 满足 程度 制定 。B. K. Kahn 等 “| 指出 信 
息 质 量 评估 标准 的 定义 应 从 产品 质量 与 服务 质量 两 方 
面 出 发 。 综 合 以 上 学 者 研究 ,对 信息 质量 标准 的 定义 
应 遵循 准确 完整、 系统 全 面 的 原则 ,同时 考虑 使 用 要 
求 与 效用 两 方面 ,对 其 进行 评估 。 
2.1.2 ”应 急 信息 质量 内 涵 界 定 

由 于 应 急 信 息 服务 于 应 急 工 作 , 因 此 其 质量 评估 
时 要 充分 考虑 其 特殊 性 。 在 对 应 急 信 息 质 量 进行 评估 
时 ,我 们 应 对 应 急 信息 的 内 涵 进 行 探 讨 , 有 学 者 认为 应 
急 信息 可 分 为 两 类 :狭义 上 指 灾害 信息 、 灾 害 信息 资 
源 ,广义 上 指 一 切 与 应 急 管 理 相 关 的 信息 。 也 有 学 
者 认为 应 急 信 息 是 所 有 为 应 急 决策 提供 支持 作用 的 信 
息 ( 如 灾情 现场 信息 、 预 案 信 息 、 预 警 信息 等 )。 本 文 
依据 当前 学 者 研究 成 果 , 同 时 结合 应 急 管 理 流程 ,将 应 
急 信息 定义 为 应 急 过 程 中 产生 的 与 应 急 相 关 的 信息 ， 
具体 而 言 可 分 为 如 下 几 类 : 

(1) 应 急 预 防 与 准备 阶段 : 
救 等 基本 常识 信息 ) ,应 急 预 案 信息 (应 急 准 备 , 应 急 协 
调 与 保障 (包括 物资 .通信 、 避 难 场所 等 信息 ) ) ,应 急 政 
策 法 规 ( 应 急 规 范 .法律 法 规 等 ) ,应 急 专 家 信息 等 。 

(2) 突 发 事件 预警 与 监测 阶段 :灾害 预警 监测 信息 
危害 风险 信息 ,应 急 信息 报 送 ,以 及 相关 预警 措施 等 。 

(3) 应 急 处 置 与 救援 阶段 :新 闻 媒 体 报 道 信息 ,网 
络 与 情 ,应 急 处 置 中 产生 的 有 关 人 财物 等 信息 ,救援 与 
处 置 措施 ,应 急 管理 过 程 共 享 信息 。 

(4) 恢复 重 建 阶段 :灾害 损失 评 佑 ,应急 事件 处 置 
报告 ,灾后 政府 发 布 声 明 , 灾 后 重建 规划 等 。 

由 应 急 信息 内 涵 可 以 总 结 应 急 信 息 资源 的 特征 : 
中 来 源 广 。 应 急 信 息 产 生 自 应 急 管理 各 环节 的 不 同 主 
体 , 加 大 了 对 应 急 信息 质量 进行 评估 的 难度 。@ 信 息 
量 庞 大 。 应 急 信息 信 源 广泛 的 特性 决定 了 信息 量 存在 
短 时 间 爆 发 的 风险 ,而 且 在 大 数据 环境 背景 下 这 一 特 
性 尤为 突出 。@ 不 确定 性 。 互 联网 移动 通信 、 物 联网 
技术 的 广泛 使 用 ,加 快 了 信息 传播 速度 ,信息 流通 速度 
的 加 快 使 得 在 传播 过 程 中 难免 受信 息 噪 声 干扰 ,从 而 
不 确定 性 增 大 。@ 由 时 效 性 强 。 信 息 的 价值 随时 间 呈 递 
减 态势 ,应 急 信息 尤为 明显 。 一 旦 错过 最 佳 传 递 时 间 , 


应 急 教育 信息 (自救 \ 互 
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应 和 急 信 息 的 价值 及 有 用 性 都 将 大 大 降低 2 。 
2.1.3” 云 理论 和 云 模型 

1995 年 ,学 者 李 德 毅 首次 提出 了 云 理 论 。 而 为 了 
实现 将 自然 语言 值 所 表现 的 定性 概念 与 定量 数据 之 间 
的 不 确定 性 转换 ,学 者 建立 了 云 模 型 。 云 由 许多 云 滴 
构成 , 云 滴 是 定性 概念 向 定量 值 间 的 映射 ,其 整体 形状 
是 对 定性 概念 的 刻画 。 云 的 特征 由 3 个 数值 描述 :期 
望 Ex Hi En iili He, JEP: HE Bx 最 能 表现 定性 概 
Ak En. Go s VB: A i PO SCIT RE i f , 
所 表现 的 定性 概念 越 模糊 ; 超 炉 He 则 表示 云 滴 的 离散 
程度 , 超 箭 越 大 , 云 就 越 “ 厚 ”。 自 云 理 论 提 出 至 今 , 云 
模型 已 成 功 地 运用 到 了 自然 语言 处 理 .数据 挖掘 决策 
分 析 与 智能 控制 等 领域 。 
二 = 现实 世界 中 , 要 使 事物 的 性 质 更 加 真实 可靠 , 需 

自然 语言 进一步 描述 。 大 数据 环境 下 的 应 急 信息 
评 倘 体系 ,指标 体系 中 的 变量 不 可 避免 地 要 受到 各 种 
$ 铂 定性 因素 的 综合 影响 ,不 确定 性 描述 的 最 好 方法 
EE 种 然 语言 , 云 模型 可 以 通过 大 量 的 定量 概念 值 及 其 


风 好 地 结合 起 来 ,实现 定性 概念 与 定量 值 之 间 的 自 


然 映射 ,最 大 程度 地 减少 映射 过 程 造成 的 信息 丢 
: 
2.2. 大 数据 环境 下 应 急 信 息 质 量 评估 需求 分 析 
2.2.1 大 数据 环境 下 应 急 信 息 资源 环境 及 特点 分 析 
就 大 数据 环境 下 的 应 急 信息 特 征 而 言 , 物 联网 、 互 
联网 技术 、 计 算 技 术 广 泛 运用 于 应 急 管理 领域 ,使 得 应 
急 信息 的 来 源 变 得 广泛 ,这 些 应 急 信 源 时 刻 产 生 着 预 
警 信息 .地理 信息 、 交 互信 息 等 ,这 些 信息 体现 出 体 量 
庞大 (volume) 的 特点 ;并 且 这 些 应 急 信息 中 既 有 图 片 、 
文字 地理 位 置 ,又 有 网 络 社交 与 情 信息 等 结构 化 非 结 
构 化 的 信息 ,使 应 急 信 息 呈 现 出 结构 多 样 ( variety ) 的 
特征 ;由 于 应 急事 件 的 突 发 性 .灾情 与 情 的 动态 性 以 及 
网 络 技术 被 运用 到 应 急 管理 中 使 应 急 信息 表现 的 传播 
迅速 性 ,应 急 信息 呈现 高 速 性 (velocity ) ;另外 由 于 应 
急 信息 数据 体 量 大 、 信 息 的 价值 有 限 ,使 其 呈现 价值 稀 
HTE ( value) ;此 外 由 于 应 急 信息 在 应 急 管 理 中 的 重要 
地 位 ,使 得 对 其 质量 有 较 高 的 要 求 ,表现 出 对 其 真实 性 
( veracity) 的 追求 。 这 些 都 符合 大 数据 的 特征 ,因此 不 
能 再 用 传统 的 手段 与 思维 来 处 理 大 数据 环境 下 的 应 急 
信息 。 大 数据 环境 下 对 应 急 信 息 质 量 的 要 求 如 表 1 所 
7N: 


R1 大 数据 环境 下 对 应 急 信 息 质 量 的 要 求 


应 总 信息 来 源 应 急 信息 内 容 应 急 信息 特征 应 急 信息 质量 要 求 
DIT 突 发 事件 监测 .预警 ,灾情 环境 ,时间 、 地 点 ,交通 信息 等 信 源 广 、 结 构 复 杂 信息 噪声 干扰 准确 .有效 
网 络 传感器 网 络 与 情 ,灾情 描述 等 来 源 . 形 式 多 样 ,价值 密度 低 ,错误 信息 .干扰 信息 准确 .真实 
信息 报道 新 闻 报道 ,政府 公告 准确 .时效 性 追求 准确 、 及 时 

急 信息 库 预案 .历史 突 发 事件 信息 .救援 案例 .组织 机 构 信息 等 元 余 , 标 准 规范 不 一 准确 衔接 性 ,一致 性 


f 大 数据 环境 下 应 急 信 息 资源 质量 评估 需求 
大 数据 环境 为 应 急 信 息 提出 了 新 的 质量 要 求 , 作 
为 应 急 信 息 质量 管理 的 重要 环节 ,大 数据 应 急 信 息 质 
量 评 佑 在 信息 质量 管理 中 的 地 位 十 分 重要 。 因 此 对 应 
和 急 信息 质量 评估 的 理论 方法、 工具 ,标准 的 建立 与 创 


M 


信息 量 庞大 


来 源 不 确定 性 


质量 标准 不 绩 


新 都 迫在眉睫 。 通 过 评估 应 急 信 息 质量 ,从 而 进行 下 
一 步 对 应 急 信息 质量 的 筛选 ,使 应 急 信息 质量 在 技术 
上 和 管理 上 均 有 所 提升 ,才能 提高 应 急 信息 管理 水 平 ， 
为 应 急 决 策 提 供 准 确 、 及 时 、 高 质量 的 应 急 信 息 资源 。 
大 数据 环境 下 应 急 信 息 质 量 评估 的 需求 如 图 1 所 示 : 


— — — a — — — ee ol 


4. 


An I LUE EE Mes GE need 


图 1 大 数据 应 急 信息 评估 需求 
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3 大 数据 环境 下 应 急 信息 质量 评估 体系 
构建 


3.1 ”大 数据 环境 下 应 急 信息 质量 评估 指标 体系 概要 设计 

目前 ,基于 对 信息 质量 的 不 同 理解 ,专家 学 者 从 不 
同 角度 提出 了 各 自 的 评估 指标 体系 。 但 是 由 于 缺 
乏 坚实 的 信息 质量 理论 ,对 信息 质量 评估 的 研究 还 处 于 
探索 阶段 ,缺乏 一 致 认同 的 评估 体系 。 处 于 大 数据 环境 
下 的 信息 资源 表现 出 复杂 的 特征 , 且 其 质量 是 一 个 多 维 
的 概念 ,因此 对 其 进行 评估 的 维度 与 指标 都 存在 复杂 多 
样 的 特征 。 根 据 现 有 研究 不 难 发 现 大 数据 环境 下 信息 
质量 的 分 析 应 包含 其 信息 的 内 容 , 同 时 还 应 对 其 效用 、 
表达 ,来 源 等 进行 分 析 。 同 时 大 数据 环境 下 的 信息 质量 
应 信息 角度 的 广泛 维度 以 及 其 自身 特点 的 独特 维度 
进行 考虑 , 既 包 括 独立 于 任务 的 指标 也 包括 其 依赖 任务 
的 指标 。 在 选取 信息 质量 指标 时 既 要 考虑 到 其 作为 信 
知 隐 普通 性 质 ,又 要 考虑 其 作为 特殊 任务 的 独特 性 质 。 
一 总 结 国内 外 学 者 对 同类 型 的 信息 质量 维度 的 定义 
机 叭 发 现 ,学 者 大 都 从 3 个 角度 对 其 进行 探讨 :内 容 
多 哆 信息 的 准确 性 是 大 数据 环境 下 的 追求 ,大 数据 环 
浇 二 ,信息 噪声 以 及 复杂 多 形式 的 信息 使 得 准确 性 成 
类 户 急 信息 质量 的 要 素 。 另 一 方面 ,大 数据 环境 下 人 
们 对 待 信息 的 理念 与 方式 发 生 了 改变 ,人 们 不 再 追求 
停 晤 的 绝对 精确 ,而 是 追求 其 内 在 的 联系 ,因此 误差 性 
也 蛙 信 息 质 量 的 影响 因素 ;应 急 信息 对 于 时 效 性 的 追 
求 屯 及 大 数据 环境 下 随时 间 衰变 的 信息 价值 使 信息 的 
及 肝 性 成 为 信息 质量 的 要 素 ;大 数据 的 重要 表现 即 根据 
不 同情 境 满足 用 户 不 同 信息 需求 ,因此 应 急 信息 对 于 用 
户 需求 的 满足 程度 , 即 应 急 信息 的 适用 性 ,也 影响 着 应 


信息 内 容 维度 包含 准确 性 、 及 时 性 .适用 性 .误差 性 ;从 
信息 使 用 者 角度 延伸 出 的 信息 描述 维度 包含 可 信 性 一 
致 性 可 解释 性 、 可 衔接 性 ;从 信息 价值 角度 延伸 出 的 信 
息 约 束 维度 分 为 可 获得 性 .有效 性 、 相 关 性 .制度 环境 。 
3.2 专家 咨询 

经 典 的 德尔 非法 在 确立 初步 指标 时 并 不 用 给 出 指 
标的 备 选 方案 ,而 是 通过 向 专家 咨询 后 得 出 初步 的 指 
标 方 案 。 本 文 依据 前 文 对 同类 指标 的 研究 与 实践 ,分 
析 大 数据 应 急 信息 质量 的 影响 因素 ,已 初步 确立 了 指 
标 方案 。 所 使 用 的 德尔 菲 法 步骤 如 下 : 
3.2.1 确定 咨询 专家 

经 过 多 方 联系 确定 参加 本 次 调查 的 专家 共有 15 
名 ,这 15 名 专家 所 处 领域 分 别 为 应 急 教育 领域 ,应急 
研究 领域 .应急 实践 工作 领域 , 且 具 有 专业 知识 和 丰富 
3.2.2 设计 调查 问卷 

在 选取 大 数据 环境 下 应 急 信息 质量 评估 的 指标 
时 ,根据 上 文 已 对 国内 外 研究 结论 进行 过 初步 筛选 ,此 
次 是 以 向 专家 发 放 问卷 的 形式 进行 调研 评估 。 此 次 问 
卷 调 查 内 容 主 要 包括 研究 目的 阐述 、 人 研究 背景 介绍 、 德 
尔 非 法 流程 介绍 、 先 拟定 评估 的 具体 指标 。 
3.2.3 ”开展 专家 咨询 

(1) 第 1 轮 专 家 咨询 :首先 给 出 确定 的 评估 指标 ， 
每 位 专家 根据 自身 知识 和 经 验 对 每 个 指标 的 影响 程度 
评分 ,影响 程度 得 分 划分 为 LiKert 型 标 度 ,采用 1 -5 
分 进行 标记 ,具体 是 “不 大 一 一般“ 大 ”很 大 ”“ 极 
大 ”。 最 终 对 专家 打分 结果 进行 汇总 ,统计 分 析 得 到 最 
终 专家 对 备 选 指标 的 打分 情况 。 

(2) 第 2 轮 专家 咨询 :依据 第 1 轮 专 家 咨询 统计 分 
析 的 结果 ,每 个 专家 对 每 一 组 指标 的 判断 结果 的 一 致 


急 信 息 质 量 。 信 息 使 用 者 角度 。 通 过 对 信息 进行 描 
述 ,信息 的 使 用 者 才能 更 好 理解 并 利用 信息 ,因此 信息 
必须 是 可 信 的 。 在 应 急 管理 各 环节 不 同 部 门 间 \、 不 同 
数据 库 之 间 ,数据库 内 部 均 存 在 着 规范 与 标准 不 统一 、 
信息 追踪 困难 、 对 信息 进行 前 后 联系 困难 、 前 后 不 可 衔 
接 或 不 一 致 等 现象 ,使 得 应 急 信息 质量 存在 问题 。@) 信 
息 的 价值 角度 。 应 急 信息 具有 信息 的 普通 性 质 , 信 息 所 
处 的 制度 环境 、 信 息 能 否 被 获得 .信息 的 价值 以 及 不 同 
信息 所 承载 的 内 容 是 否 相关 等 都 是 其 重要 质量 要 素 。 

本 文 在 对 比 国内 外 大 数据 质量 评 佑 指标、 信息 质量 
评估 指标 、 应 急 信 息 质量 评估 指标 的 基础 上 ,参考 并 总 
结 出 相关 研究 领域 专家 的 研究 成 果 , 初 步 选取 了 影响 大 
数据 环境 下 应 急 信 息 质 量 评估 的 3 个 维度 的 12 个 指标 : 


HILU ( 2/3 专家 对 指标 的 判断 结果 3 ) .平均 值 的 
分 布 情况 向 专家 进行 汇报 ,第 2 轮 专 家 根据 第 一 次 的 
结果 ,重新 对 指标 进行 评价 。 在 德尔 非法 中 ,专家 的 意 
见 都 是 从 不 一 致 到 一 致 的 探讨 过 程 。 本 文 的 研究 中 ， 
因为 专家 在 第 2 轮 的 意见 基本 趋 于 一 致 ,所 以 本 文 只 
进行 了 2 轮 专家 咨询 。 专 家 咨询 意见 的 协调 性 计算 结 


果 情 况 如 表 2 所 示 
表 2 2 轮 专 家 咨询 协调 性 情况 
计算 结果 第 1 轮 第 2 轮 
协调 系数 WW 0.325 6 0.691 2 
X 3.5812 10.368 0 


(3258 3 轮 专 家 咨询 :为 了 得 出 指标 体系 的 权重 ,发 
放 问 卷 由 专家 对 指标 间 的 重要 性 进行 比较 ,如 表 3 所 示 : 
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RI 判断 矩阵 标 度 及 其 含义 


序号 重要 性 等 级 C ecl 
1 i,j 两 元 素 同等 重要 1 
2 i 元素 比 j 元 素 稍 重要 3 
3 i 元 素 比 j 元 素 明 显 重要 5 
4 i 元 素 比 j 元 素 强烈 重要 7 
5 i 元 素 比 j 元 素 极端 重要 9 
6 相 邻 判断 值 的 中 间 值 2468 
(4) 调 查 结果 处 理 : 对 专家 咨询 的 结果 进行 计算 


处 理 。 
3.3 ”大 数据 环境 下 应 急 信息 质量 评估 指标 体系 的 确定 
挑选 出 第 二 轮 调查 形成 的 专家 组 一 致意 见 大 于 等 
于 3 的 指标 作为 评估 指标 ,按照 此 标准 通过 对 12 个 指 
m uu c s 
制订 环境 指标 , 共 筛 选 出 8 个 指标 。 其 中 在 大 数据 环 
下 对 信息 质量 的 追求 不 再 是 精确 而 是 追求 一 定 的 准 
策 , 因 此 对 于 误差 性 在 准确 性 中 有 一 定 的 体现 ,而 相 
在 一 致 性 和 可 衔接 性 中 也 有 一 定 体现 ,应 急 信息 的 
时 对 于 所 存在 的 制度 环境 影响 不 大 ,最 终 确 定 了 大 数 
据 环境 下 应 急 信息 质量 评估 指标 体系 ,如 图 2 所 示 : 


大 数据 环境 下 应 急 信 
息 质 量 评估 指标 体系 


王 一 一 一 一 一 ” 


信息 约束 维度 k 一 十” 一 级 指标 | 
L 5 


图 2 ”大 数据 环境 下 应 急 信息 质量 评价 指标 体系 


内 容 质 量 维度 
言 息 是 内 容 的 重要 载体 ,内 容 是 信息 最 基本 的 特 
征 。 在 内 容 质 量 内 涵 上 主要 包括 信息 的 准确 性 、 及 时 
性 、 适 用 性 : E \ 质 量 评估 的 重要 指标 之 一 ， 


$3.1 


由 于 大 数据 环境 下 信息 噪声 的 存在 , 低 质量 、 低 价值 . 错 
oo rn 


挑战 甚至 是 干扰 , 准确 性 是 对 现实 情况 的 真实 反映 , 准 
确 性 越 高 反映 真实 情况 程度 越 高 。@ 及 时 性 表现 为 信 
息 收 集 传输 决策、 发 布 的 时 效 、 动 态 以 及 时 间 跨 度 。 
自然 灾害 和 突 发 事件 瞬息 万 变 ,而 大 数据 环境 下 信息 的 
“1 秒 ” 定 律 也 反映 着 时 效 性 对 价值 的 影响 ,因此 对 于 及 
时 性 ,应 急 管理 决策 者 有 着 极其 重要 的 要 求 。(3) 适 用 性 
表现 为 信息 是 否 满足 用 户 决策 者 的 需求 ,大 数据 环境 
下 的 信息 质量 对 能 否 满足 信息 用 户 的 需求 也 有 着 极 高 


的 要 求 , 因 此 在 对 应 急 信 息 
过 程 中 应 当 充 分 — 
3.3.2. 描述 质量 维度 
言 息 的 描述 质量 表现 为 在 信息 语义 描述 状态 下 的 
质量 ,描述 质量 具体 含义 表现 为 信息 的 一 致 性 、 可 衔接 
性 和 可 解释 性 :中 一 致 性 表现 为 在 数据 库 内 逻辑 的 一 
致 性 以 及 不 同 数据 库 间 的 一 致 性 ;@ 可 衔接 性 指 所 旺 
现 的 信息 目录 、 分 类 及 相关 链接 等 是 否 在 同一 应 急 部 
门 .不 同 部 门 上 下 可 衔接 、 是 否 相 关 ; 可 解释 性 指 应 
急 信 息 便于 决策 .用户 正确 理解 和 使 用 的 程度 。 
3.3.3 信息 约束 维度 
应 急 信 息 质 量 进行 评估 时 , 需 考 虑 信息 的 内 容 质 
量 描述 质量 外 还 需 对 其 作为 普通 信息 的 质量 约束 标 
bee dun roe E, Re bod CO 
应 急 信 息 是 否 易于 用 户 .决策 者 获得 ,是 应 急 信 息 效 用 
o pu 息 的 有 效 性 也 是 信息 价值 的 重 
要 表现 ,因此 应 急 信 息 在 应 急 管 理 活 动 中 对 效率 的 影响 
也 是 衡量 其 信息 质量 的 重要 指标 。 
3.4 确定 属性 权重 
通过 第 3 轮 专家 咨询 建议 确定 指标 权重 ,由 于 在 指 
标 体系 的 构建 过 程 中 ,专家 对 各 指标 的 内 容 与 重要 性 有 
所 了 解 ,因此 本 文 利 用 层次 分 析 法 对 指标 权重 进行 确 
定 ,其 中 各 指标 的 重要 性 比较 见 表 3。 根 据 专 家 打分 情 
况 构建 相关 判断 矩阵 ,并 对 判断 矩阵 进行 一 致 性 判断 ， 
最 终 得 出 一 级 二 级 指标 的 权重 情况 ,如 表 4 所 示 : 
表 4 大 数据 环境 下 应 急 信 息 质 量 评估 指标 体系 及 权重 


进行 收集 ,整理 .数据 挖掘 等 
和 决策 者 的 需求 。 


目标 层 一 级 指标 /权重 二 级 指标 /权重 /综合 权重 
大 数据 环境 下 内 容 质量 /0. 412 6 准确 性 /0.412 6/0.170 2 
应 急 信息 质量 及 时 性 /0.327 5/0.135 1 
适用 性 /0.259 9/0. 107 2 

描述 质量 /0.259 9 一 致 性 /0.4/0.104 0 

可 衔接 性 /0.2/0.052 


[解释 性 /0.4/0. 103 9 


z| n 


信息 约束 /0.327 5 [获得 性 /0.5/0. 163 8 


有 效 性 /0.5/0.163 8 


4 ”基于 云 模型 的 大 数据 环境 下 应 急 信息 
质量 评估 案例 研究 


由 于 信息 环境 的 改变 ,应 急 信 息 所 表现 的 特征 完全 
符合 大 数据 所 表现 的 “4V" 特征 ,是 一 种 典型 的 大 数 
据 ” 。 因 此 可 以 利用 大 数据 相关 技术 对 其 进行 处 理 。 
而 目前 对 大 数据 环境 下 应 急 信 息 质量 评估 的 方法 还 需 
要 不 断 丰 富 。 云 理论 自 1995 年 提出 以 来 ,经 过 学 者 的 深 
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入 应 用 研究 ,已 经 广泛 地 运用 在 信息 质量 的 评估 、 自 然 
语言 处 理 以 及 数据 挖掘 ,智能 决策 等 领域 ,理论 与 应 用 
都 较为 成 熟 。 因 此 本 文 尝试 将 云 模型 引入 大 数据 环境 


量 评估 中 。 设 计 评估 步骤 流程 如 下 : 
(1) 评 佑 指标 集 ; 
(2) 将 不 确定 语言 形式 的 评估 信息 转换 为 云 , 即 


下 应 急 信息 质量 评估 中 ,充分 考虑 大 数据 环境 下 应 急 信 
息 的 模糊 性 和 不 确定 性 , 建立 应 急 信 息 质 量 评价 因素 影 
响 强 度 的 定性 定量 转换 ,该 模型 为 大 数据 环境 下 应 急 信 
息 评 佑 ,管理 与 数据 挖掘 智能 决策 提供 了 新 的 选择 。 
4.1 基于 云 模型 的 评估 流程 设计 

本 文 尝 试 将 云 模型 引入 大 数据 环境 下 应 急 信息 质 


应 急事 件 
信息 分 类 


[374-2 N 
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42 样本 选取 及 数据 描述 

样本 的 选取 是 研究 的 关键 ,在 对 应 急 信息 质量 评 
信 距 应 亲 循 样本 选取 的 可 行 性 .科学 性 ,代表 性 等 原 
则 E 因 此 笔者 在 对 应 急 信息 数据 库 现 状 进行 调查 研究 
的 鼎 础 上 ,选取 了 国内 具有 代表 性 的 EPS 数据 平台 与 
国外 信息 较为 全 面 的 EM -DAT 突 发 事件 数据 库 , 两 数 
据 库 都 具有 较为 客观 全 面 的 应 急 信 息 , 其 应 急 信 息 数 
据 对 外 开放 性 都 优 于 其 他 数据 库 , 且 应 急 信 息 更 新 较 
为 及 时 ,维护 工作 完善 ,在 选用 国内 国外 两 个 应 急 信 息 
数据 库 时 也 考虑 了 其 可 对 比 性 。EPS 数据 平台 是 国内 
专业 的 数据 \ 信 息 服务 提供 商 ,是 一 个 涵盖 了 经 济 、 工 
Ap 农业 科技 等 领域 的 数据 库 ;EM -DAT 突 发 事件 数据 
库 包含 了 从 1900 年 到 现在 全 世界 各 类 应 急 信 息 的 重 
要 核心 数据 ,对 国内 的 应 急 信 息 收 集 较 客观 准确 。 
此 本 文 随机 选取 两 个 数据 库 中 与 中 国 相关 的 应 急 信息 
对 两 个 数据 库 进行 评级 ,随机 选取 的 内 容 为 中 国 的 疫 
情 信息 \ 病 虫 灾害 信息 ,森林 火灾 ,干旱 .地震 \ 洪 水 IR 
坡 、 风暴、 交通 事故 共 9 类 应 急 信 息 。 
4.3 大 数据 环境 下 应 急 信 息 质 量 评估 案例 实施 

在 对 两 数据 库 中 的 应 急 信息 质量 进行 评估 时 ,再 


设立 应 急 信息 质量 评估 的 等 级 标准 ; 
(3) 引 入 属性 权重 ; 
(4) 构 建 专家 对 各 个 案例 评估 的 多 层次 综合 云 ; 
(5) 得 出 评估 结果 。 
基于 云 模型 的 大 数据 环境 下 应 急 信 息 质 量 评 估 具 
体 流 程 如 图 3 Bron : 
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次 邀请 前 述 的 应 急 研 究 相 关 领 域 和 应 急 管理 相关 部 门 
的 15 名 专家 对 随机 选取 的 两 个 数据 库 中 的 9 类 中 
应 急 信 息 进行 打分 。 

由 于 专家 的 研究 背景 与 实践 经 验 的 不 同 ,其 对 每 个 
指标 进行 评分 具有 主观 性 特点 ,同时 打分 结果 具有 模糊 
性 ,此 外 ,在 同一 个 环境 下 同一 个 评价 的 专家 打分 具有 
一 定 的 随机 性 ,所 以 可 以 考虑 利用 云 模型 对 其 进行 评 
估 。 该 项 调查 的 统计 数据 共有 8 个 指标 ,专家 组 根据 现 
实情 况 访 问 数据 库 ,并 且 查 阅 相 关 资 料 , 对 各 指标 下 的 
具体 情况 进行 评估 ,记录 包括 各 项 指标 的 评分 结果 和 得 
分 矩阵 ,本 次 评估 选用 5 个 评价 等 级 :| 非常 差 , 较 差 ,中 
等 , 较 好 ,非常 好 | , 即 S = {s = “非常 差 ",s "AE 
差 ”,so =“ 中 等 ”,s ,, =“ 较 好 ”,s ,。 =“ 非 常 好 ”。 

4.3.1 评估 指标 集 


量 评估 的 综合 质量 。C 表示 大 数据 环境 下 3 个 质量 维 
度 ,C; 的 集合 可 以 用 C= 16,,6, nnn Cn 表示 ,其 含 
义 为 信息 内 容 质 量 \ 信 息 描 述 质 量 和 信息 约束 质量 。 
表示 C, 的 二 级 评估 指标 的 集合 ,可 以 表示 为 C; = 
[C5 ,C5,77, C] ,其 中 m=1,2,3, 表 示 3 个 一 级 指标 ， 
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C, 表 示 第 i 个 一 级 评估 指标 中 的 第 j 个 二 级 指标 。 
4.3.2 ”将 不 确定 语言 形式 的 信息 转换 为 云 

首先 ,采用 黄金 分 割 法 将 专家 评语 集 转换 为 数字 
特征 (z a, z 0 0 ,假定 有 效 论 域 为 [xwzx ] = 
[0,100], He, =0.1, 则 5 个 云 依 次 为 :Z_ ,(0,10.31, 
0.26),Z ,(30.9,6.37,0.16) ,2,(50,3. 93,0. 1),Z2 ， 
(69.1,3.93,0.16) ,2,,(100,10.31,0.26) , 

以 (za ) 为 数字 特征 设 定 评估 等 级 标准 
云 ,可 以 得 出 图 4: 


wi = (0. 170 2,0. 135 1,0. 107 2,0. 104,0. 052, 
0.103 9,0. 163 8,0.163 8) ; 

其 中 (i=1,2,3; j=1,2,3,…,8) 
4.3.4 构建 不 同 专家 下 各 个 案例 的 多 层次 综合 云 

根据 15 位 专家 对 两 个 数据 库 对 9 类 中 国 应 急 信 
息 的 评估 得 分 的 平均 值 ,可 以 得 出 关于 大 数据 环境 下 
应 急 信 息 的 各 指标 的 评估 得 分 和 矩阵 ,根据 专家 打分 结 
果 , 由 逆向 云 发 生 算法 公式 ”可 得 到 A.\B 数据 库 应 急 
言 息 质 量 的 各 项 评估 指标 的 云 模型 数字 特征 值 C, 
(Ex,,En,,He,) (i=1,2,.…,8) 

AB 数据 库 的 3 个 一 级 指标 的 计算 结果 如 表 5 所 示 : 

RS 数据 库 应 急 信息 质量 的 一 级 评估 


T 指标 云 模型 数字 特征 
E 
Sega Ci C; C3 
> A Ex; 78.303 6 79.800 7 74.666 7 
Nez En; 7.196 2 3.554 0 4.6973 
E He; 2.6525 1.1803 1.167 7 
© 0 B Ex; 81.126 8 80.021 7 78.944 4 
e En; 5.746 1 5.649 6 7.935 9 
图 
er 4 评估 等 级 标准 的 云 滴 图 He; 2.048 1 2.093 1 3.094 3 
4@ 引入 属性 权重 A B 两 个 数据 库 9 个 二 级 指标 的 结果 如 表 6 
CN = (0.412 6,0.259 9,0.327 5); Wess 
CN 表 6 数据 库 中 应 急 信 息 质 量 的 二 级 评估 指标 的 云 模型 数字 特征 
> Cu Ci» Cis C C», C» Cal C» 
T Ex, 78.444 4 79.7718 76.2222 80.444 4 8.1111 78.000 74.666 7 74.666 7 
>< En; 5.3739 7.8912 8.046 0 5.910 7 3.744 5 4.1717 2.970 8 5.9416 
5 He; 2.494 9 2.706 9 2.820 8 3.105 1 1.3820 1.340 1 0.8210 1.432 8 
C Ex; 81.444 4 81.4444 80.222 2 78.111 1 81.2222 81.3333 71.444 4 80.444 4 
aca En; 5.353 7 2.444 7 8.603 0 8.169 8 2.4757 3.1565 8.850 6 6.901 0 
一 He; 2.148 5 0.548 8 2.903 9 2.5754 0.752 0 2.009 1 3.248 6 2.9319 
4.3.5 


利用 云 模型 对 8 个 指标 进行 加 权 算 数 平均 计算 可 
以 得 出 样本 整体 评估 的 结果 : 

CWAA, = (77.501 2,5. 896 2,2.153 5) 

CWAA, = (80.124 7,6.522 8,2.450 6) 

利用 得 出 的 综合 指数 CWAA\、CWAA 对 数字 特 
征 与 评估 等 级 标准 的 云 滴 图 进行 拟 合 ,可 以 得 出 ALB 
信息 数据 库 与 标准 模型 的 拟 合 图 ( 见 图 5) 。 
4.4 评估 结果 分 析 

(1) 从 得 出 的 综合 评价 指数 CWAA 可 以 分 析 两 个 
数据 库 的 整体 应 急 信 息 质量 ,A、B 两 个 数据 库 最 能 代 
表 应 急 信息 质量 的 隶属 度 为 1 的 加 权 平 均 综 合 云 模型 
的 数字 特征 值 分 别 为 A=77.5012,B =80.1247, 从 而 
可 以 初步 判断 出 两 个 应 急 信 息 数据 库 的 信息 质量 应 介 
于 “ 较 好 ”与 “非常 好 ”之 间 , 且 更 倾向 于 “ 较 好 ”, 直观 


5 A.B 应 急 信息 质量 与 标准 云 滴 图 对 比 


上 看 B 数据 库 中 的 应 急 信 息 质量 要 略 优 于 A 数据 库 。 
69.1 <A=77.5012<B=80.1247<100 
(2) 就 各 一 级 指标 进行 计算 分 析 , 在 信息 内 容 质 
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量 、 信 息 描述 质量 、 信 息 约 束 质 量 方面 ,A 数据 库 质量 
都 稍 逊 于 B 数据 库 。 但 在 描述 质量 维度 上 ,A 数据 库 
的 期 望 特征 Ex, 要 稍 小 于 B 数据 库 , 而 炳 特征 En, 与 超 
RIFFI He, 却 要 优 于 B 数据 库 , 这 就 说 明 在 A 数据 库 
中 不 同类 别 的 应 急 信息 的 描述 信息 质量 差别 并 不 明 


并 且 基 于 理论 基础 与 实践 需求 ,通过 德尔 非法 构建 大 
数据 环境 下 应 急 信息 质量 评估 体系 ,采用 层次 分 析 法 
为 指标 赋 权 ,该 评估 体系 能 较 好 地 反映 大 数据 环境 下 
对 信息 质量 的 要 求 ,较为 全 面 地 准确 反映 应 急 信 息 质 
量 特征 ,对 指导 应 急 信 息 质 量 评 佑 工作 具有 一 定 意义 ; 


显 ,而 了 数据 库存 在 不 同类 别 应 急 信息 的 明显 差异 。 就 
信息 约束 维度 而 言 ,B 数据 库 质量 优 于 A 数据 库 , 但 是 
也 明显 存在 不 同类 型 应 急 信息 质量 参差 不 齐 的 现象 。 
(3 ) 对 比 两 个 应 急 信息 数据 库 的 8 个 二 级 指标 我 
们 可 以 发 现 ,在 A 数据 库 中 的 应 急 信息 的 一 致 性 与 可 
衔接 性 要 比 B 数据 库 好 ,但 在 及 时 性 、 适 用 性 及 有 效 性 
方面 ,B 数据 库 都 要 优 于 A 数据 库 。 在 可 获得 性 、 可 解 
释 性 方面 ,A 数据 库 只 面向 研究 机 构 .政府 机 构 等 , 需 
进行 注册 才 可 访问 ,而 B 数据 库 作 为 较为 全 面 的 国民 
统 评 信 息 数据 库 ,面向 对 象 较为 广泛 并 且 应 急 信息 的 
| 启 理 解 性 更 好 。 
4G 评估 结果 与 实际 对 比 
由 于 缺少 对 应 急 信息 数据 库 等 级 的 界定 ,本 文通 
未 焰 两 数据 库 中 的 信息 从 8 个 指标 角度 与 “国家 数据 ” 
( ip :// data. stats. gov. cn/ ) 网 站 中 数据 进行 对 比 以 验 
请 肖 合 结果 是 否 科学 。 在 信息 的 准确 性 上 EPS 数据 库 
的 玲 确 性 基本 与 “国家 数据 "中 的 应 急 信息 基本 相同 ， 
if EM-DAT 中 的 数据 存在 信息 缺失 现象 ,例如 在 地 震 
观测 点 .地震 灾后 恢复 重建 的 支出 方面 EM-DAT 数据 
库 活 未 收录 ,并且 存在 有 些 数据 难以 验证 准确 性 的 情 
况 思 在 信息 的 及 时 性 方面 ,EM-DAT 数据 库 的 地 震 . 风 
暴 信息 的 及 时 性 要 优 于 EPS 数据 库 ,而 EPS 的 其 他 几 
22007. 01s 
的 信息 为 国家 各 部 门 对 数据 的 汇总 ,目的 明确 ,对 应 急 
工作 有 一 定 指导 ,而 EM-DAT 数据 库 中 的 数据 来 源 于 
国外 相关 研究 机 构 .监测 机 构 , 目 的 多 为 研究 使 用 , 因 
此 适用 性 较 差 。 在 一 致 性 .可 衔接 性 上 ,EM-DAT 中 数 
据 的 标准 结构 .收录 数据 项 目 .应 急 信息 编号 等 都 较 
完善 ,而 且 自 建 库 ( 创建 于 1988 年 ) 至 今 一 直 沿 用 ,而 
EPS 数据 库 (2005 年 ) 收录 年 限 以 及 编号 等 有 所 欠缺 。 
在 信息 的 解释 和 可 获得 性 方面 , EPS 面向 用 户 为 国内 
机 构 与 居民 ,而 EM-DAT 面向 研究 者 和 国外 机 构 ,要 稍 
逊 于 FEPS。 因 此 评估 的 结果 与 实际 较为 相符 。 


5 结语 与 展望 


本 文 研究 应 急 信息 质量 所 处 的 大 数据 环境 ,分 析 
应 急 管理 对 于 提升 信息 质量 的 评估 需求 ,为 后 期 大 数 
据 环 境 下 应 急 信 息 质 量 评估 体系 构建 制定 需求 分 析 ; 


而 后 利用 所 构建 的 大 数据 环境 下 应 急 信息 质量 评估 体 

系 并 且 结合 云 模型 评估 方法 对 EPS 数据 平台 和 EM- 

DAT 突 发 事件 数据 库 进 行 应 急 信息 质量 评估 ,并 且 将 

评估 结果 和 实际 相对 比 ,分 析 评 估 的 合理 性 。 

本 文 研 究 仍 存在 一 定局 限 性 :应 急 信息 质 量 衡量 
标准 存在 主观 性 ,难以 实现 自动 评估 ;应 急 信息 的 来 源 
过 于 广泛 ,但 有 些 难以 获取 ,难以 对 元 数据 进行 评估 。 
基于 此 ,在 大 数据 环境 下 应 急 信 息 质量 评估 的 研究 与 
实践 中 要 加 强 相 关 质 量 标准 的 建设 。 在 对 元 数据 进行 
管理 时 要 实现 其 标准 化 ,可 以 通过 构建 关键 业务 元 数 
据 、 及 时 跟 进 与 理解 大 数据 技术 中 的 元 数据 、 将 业务 数 
据 与 元 数据 对 接 以 实现 对 数据 追踪 、 更 新 应 急 管 理 部 
门 的 元 数据 等 措施 来 增加 大 数据 内 容 。 
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Abstract: | Purpose/significance | This paper proposes an emergency information quality evaluation system in 


the big data environment to help screen out high-quality emergency information in view of the new challenges faced by 


emergency information quality management in the current big data era. | Method/process | Based on the characteris- 


tics of emergency information in big data environment and the demand analysis for high-quality emergency information 


in emergency management , an emergency information quality evaluation system in big data environment was designed 


and constructed. Furthermore, the cloud model was used to evaluate the domestic emergency information in EPS da- 


tabase and EM-DAT emergency database. | Result/conclusion | The evaluation results are in good agreement with 


the actual situation, which indicates that the evaluation system has certain significance for guiding the quality evalua- 


tion of emergency information. 
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